e61a37c32558b2054a65e4ae04ed0da01adc9aae
4

 

challenge
Reading Comprehension
submitter
Krzysztof Wróbel
submitted
2024-10-11 17:14:28.090539 UTC
file basename
out

test-B / d68624b30784797f0d71b28771f5c7d63c0c6fe8
Metric Score
Score 82.92
Levenshtein 83.52
Answerability 82.33

test-A / 646a37ce5f171cb50b4249bc9626df27902369f3
Metric Score
Score 83.76
Levenshtein 86.08
Answerability 81.44

dev-0 / 42f228688311332f9fcb087cabf228fdf8c78e19
Metric Score
Score 83.07
Levenshtein 84.42
Answerability 81.73

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-B Score
1 18093_0_4 nie nie NaN
2 8922_0_1 w warszawie 0.00
3 7843_0_2 tak 0.00
4 9778_0_2 4440/2440/500 mm 0.00
5 8949_0_2 lokalni politycy sld 0.00
6 8031_0_4 2004 0.00
7 8069_0_4 nie 0.00
8 9033_0_2 danie obywatelom prawa do noszenia broni i zwolnienie z więzień wszystkich więźniów 0.00
9 8942_0_2 ok. 500 tysięcy funtów 0.00
10 7947_0_3 na pieczęciach 0.00
11 4825_0_3 trzy 0.00
12 4865_0_3 major chagaj ronen 0.00
13 3553_0_3 od początku lat 90 0.00
14 4740_0_3 wygrywający nadawca publiczny 0.00
15 92_0_4 dwóch 0.00
16 1700_0_4 orangutan 0.00
17 6066_0_2 co ma stanowić nawiązanie do wiadomości rozsyłanych przez esterę i mardocheusza do współwyznawców 0.00
18 1709_0_3 w południowo-zachodniej 0.00
19 3902_1_0 tak 0.00
20 4235_0_3 tak 0.00
21 4504_0_2 islandią 0.00
22 2279_0_2 30 tys 0.00
23 2839_0_3 o 10% 0.00
24 6172_1_3 tak 0.00
25 41_0_3 zwolenników rządu i działaczy ruchu oporu 0.00
26 5112_0_3 wagnera 0.00
27 5503_0_4 tak 0.00
28 5081_0_0 inwazją lisa 0.00
29 3583_0_3 200 000 0.00
30 2234_0_3 po tych wydarzeniach pancernik pozostawał w puli aż do czerwca 1918 roku 0.00
31 4864_0_1 w ekalaka w montańskim hrabstwie carter 0.00
32 4864_0_3 1943 0.00
33 2243_0_3 około dwóch tysięcy 0.00
34 4739_0_4 2010 0.00
35 4256_0_0 grand prix niemiec 2011 0.00
36 7081_0_2 leonid sokołow 0.00
37 6498_0_0 21 kwietnia 2016 0.00
38 7190_0_3 na osiedlu 0.00
39 7136_0_2 ząb 0.00
40 11434_0_3 6047 0.00

Compare with other submission